在已编码视频比特流中发信号通知子图片划分的方法技术

【技术实现步骤摘要】 【国外来华专利技术】在已编码视频比特流中发信号通知子图片划分的方法[0001]相关申请的交叉引用[0002]本申请要求于2020年3月31日提交的、申请号为63/003,123的美国临时专利申请、以及于2020年10月27日提交的、申请号为17/081,392的美国专利申请的优先权，其全部内容并入本文。

[0003]所公开的主题涉及视频编码和解码，更具体地，涉及在已编码视频比特流中发信号通知子图片划分。

技术介绍

[0004]使用具有运动补偿的图片间预测来进行视频编码和解码已经众所周知。未压缩的数字视频可以包括一系列图片，每个图片具有例如1920×1080亮度样本及相关色度样本的空间维度。所述系列图片可以具有固定的或可变的图片速率(也非正式地称为帧率)，例如每秒60个图片或60Hz。未压缩的视频具有很高的比特率要求。例如，每个样本8比特的1080p60 4:2:0视频(60Hz帧率下1920x1080亮度样本分辨率)要求接近1.5Gbit/s带宽。一小时这样的视频就需要超过600GB的存储空间。[0005]视频编码和解码的一个目的是通过压缩减少输入视频信号的冗余。压缩可以帮助降低对上述带宽或存储空间的要求，在某些情况下可降低两个或更多数量级。无损压缩和有损压缩、以及两者的组合均可采用。无损压缩是指从压缩的原始信号中重建原始信号精确副本的技术。当使用有损压缩时，重建信号可能与原始信号不完全相同，但是原始信号和重建信号之间的失真足够小，使得重建信号可用于预期应用。有损压缩广泛应用于视频。容许的失真量取决于应用。例如，相比于电视应用的用户，某些消费流媒体应用的用户可以容忍更高的失真。可实现的压缩比反映出：较高的允许/容许失真可产生较高的压缩比。[0006]视频编码器和解码器可以利用几大类技术，例如包括运动补偿、变换、量化和熵编码，其中的一些技术将会在下文中介绍。[0007]历史上，视频编码器和解码器倾向于在给定图片大小上进行操作，在大多数情况下，该给定图片大小是针对已编码视频序列(CVS)、图片群组(GOP)或类似的多图片时间帧定义的，并保持不变。例如，在MPEG‑2中，已知系统设计根据诸如场景的活动等因素改变水平分辨率(从而改变图片大小)，但是仅在I图片上改变水平分辨率，因此通常用于GOP。例如，根据ITU‑T Rec.H.263附录P，在CVS内使用不同分辨率对参考图片进行重采样是已知的。然而，这里的图片大小没有改变，只有参考图片被重采样，导致可能只有部分图片画布被使用(在下采样的情况下)，或者只有部分场景被捕获(在上采样的情况下)。此外，H.263附录Q允许以因子2(在每个维度中)对单个宏块向上或向下重采样。同样，图片大小保持不变。宏块的大小在H.263中是固定的，因此不需要发信号通知。[0008]在现代视频编解码中，已预测图片中的图片大小的变化越来越成为主流。例如，VP9允许参考图片重采样并改变整个图片的分辨率。类似地，针对VVC提出了某些建议(包括，例如Hendry等人的“关于VVC的自适应分辨率改变(On adaptive resolution change(ARC)for VVC)”，联合视频组文档JVET‑M0135‑v1，2019年1月9日至19日，其整体并入本文)，允许将整个参考图片重采样为不同的更高或更低的分辨率。在该文档中，建议在序列参数集中对不同的候选分辨率进行编码，并由图片参数集中的每图片语法元素引用。

技术实现思路

[0009]在实施例中，提供了一种使用至少一个处理器对已编码视频比特流进行解码的方法，包括：当当前图片的至少一个子图片的数量大于1时，获取一个标志，所述标志指示是否显式地发信号通知子图片分区信息；当所述标志指示显式地发信号通知所述子图片分区信息时，获取所述子图片分区信息；以及基于所述子图片分区信息解码所述当前图片。[0010]在实施例中，提供了一种对已编码视频比特流进行解码的设备，包括：至少一个存储器，被配置为存储程序代码；以及至少一个处理器，被配置为读取所述程序代码，并按照所述程序代码的指令进行操作，所述程序代码包括：第一获取代码，被配置为使所述至少一个处理器在当前图片的至少一个子图片的数量大于1时，获取一个标志，所述标志指示是否显式地发信号通知子图片分区信息；第二获取代码，被配置为使所述至少一个处理器在所述标志指示显式地发信号通知所述子图片分区信息时，获取所述子图片分区信息；以及解码代码，被配置为使所述至少一个处理器基于所述子图片分区信息解码所述当前图片。[0011]在实施例中，提供了一种非易失性计算机可读介质，用于存储指令，所述指令包括一个或多个指令，当所述一个或多个指令由用于对已编码视频比特流进行解码的设备的一个或多个处理器执行时，使所述一个或多个处理器：当当前图片的至少一个子图片的数量大于1时，获取一个标志，所述标志指示是否显式地发信号通知子图片分区信息；当所述标志指示显式地发信号通知所述子图片分区信息时，获取所述子图片分区信息；以及基于所述子图片分区信息解码所述当前图片。附图说明[0012]根据以下详细描述和附图，所公开的主题的其他特征、性质和各种优点将进一步明确，其中[0013]图1是根据实施例的通信系统的简化框图的示意图。[0014]图2是根据实施例的通信系统的简化框图的示意图。[0015]图3是根据实施例的解码器的简化框图的示意图。[0016]图4是根据实施例的编码器的简化框图的示意图。[0017]图5A‑5E是根据实施例的用于发信号通知ARC参数的选项的示意图。[0018]图6A‑6B是根据实施例的语法表的示例的示意图。[0019]图7是根据实施例的具有自适应分辨率变化的可缩放性的预测结构的示例。[0020]图8是根据实施例的语法表的示例。[0021]图9是根据实施例的解析和解码每个访问单元的POC周期和访问单元计数值的简化框图的示意图。[0022]图10是根据实施例的包括多层子图片的视频比特流结构的示意图。[0023]图11是根据实施例的具有增强分辨率的所选子图片的显示的示意图。[0024]图12是根据实施例的包括多层子图片的视频比特流的解码和显示过程的框图。[0025]图13是根据实施例的具有子图片的增强层的360视频显示的示意图。[0026]图14是根据实施例的子图片及其对应层的布局信息和图片预测结构的示例。[0027]图15是根据实施例的具有局部区域的空间可缩放性模态的子图片及其对应层的布局信息和图片预测结构的示例。[0028]图16A‑16B是根据实施例的用于子图片布局信息的语法表的示例。[0029]图17是根据实施例的用于子图片布局信息的SEI消息的语法本文档来自技高网...

【技术保护点】

【技术特征摘要】 【国外来华专利技术】1.一种使用至少一个处理器对已编码视频比特流进行解码的方法，其特征在于，所述方法包括：当当前图片的至少一个子图片的数量大于1时，获取一个标志，所述标志指示是否显式地发信号通知子图片分区信息；当所述标志指示显式地发信号通知所述子图片分区信息时，获取所述子图片分区信息；以及基于所述子图片分区信息解码所述当前图片。2.根据权利要求1所述的方法，其特征在于，所述标志和所述子图片分区信息在序列参数集SPS中发信号通知。3.根据权利要求2所述的方法，其特征在于，所述至少一个子图片的数量在所述SPS中发信号通知。4.根据权利要求1所述的方法，其特征在于，当所述当前图片的图片大小小于所述当前图片的亮度分量的编码树单元的大小时，所述至少一个子图片的数量等于1。5.根据权利要求4所述的方法，其特征在于，当所述至少一个子图片的数量等于1时，所述标志指示不显式地发信号通知所述子图片分区信息。6.根据权利要求1所述的方法，其特征在于，所述子图片分区信息指示所述至少一个子图片中的子图片的大小。7.根据权利要求6所述的方法，其特征在于，所述子图片的大小包括所述子图片的高度和宽度。8.根据权利要求6所述的方法，其特征在于，所述子图片的大小在所述子图片分区信息中以所述当前图片的亮度分量的编码树单元的大小为单位来指示。9.根据权利要求6所述的方法，其特征在于，基于所述子图片分区信息指示的所述子图片的大小，确定另一子图片的大小。10.一种对已编码视频比特流进行解码的设备，其特征在于，所述设备包括：至少一个存储器，被配置为存储程序代码；以及至少一个处理器，被配置为读取所述程序代码，并按照所述程序代码的指示进行操作，所述程序代码包括：第一获取代码，被配置为使所述至少一个处理器在当前图片的至少一个子图片的数量大于1时，获取一个标志，所述标志指示是否显式地发信号通知子图片分区信息；第二获取代码，被配置为使所述至少一个处理器在所述标志指示显式地发信号通...

【专利技术属性】 技术研发人员：崔秉斗，刘杉，史蒂芬， 申请(专利权)人：腾讯美国有限责任公司， 类型：发明 国别省市：